Oracle закупит у NVIDIA высокопроизводительные ускорители на $40 млрд для нового гигантского ЦОД OpenAI в Абилине (Техас, США), который станет первым объектом проекта Stargate, сообщила газета The Financial Times. После завершения строительства мощность ЦОД составит 1,2 ГВт, что сделает площадку одной из крупнейших в мире.

По словам источников The Financial Times, Oracle приобретёт для установки в этом ЦОД около 400 тыс. ИИ-ускорителей NVIDIA GB200. Объект будет введён в эксплуатацию в середине 2026 года, после чего Oracle возьмёт его в аренду на 15 лет и предоставит вычислительные мощности в аренду OpenAI. Владельцы площадки, Crusoe Energy и американская инвестиционная компания Blue Owl Capital, привлекли $15 млрд в форме заёмных средств и акционерного капитала. Весь кампус ЦОД будет включать восемь объектов.

По словам осведомлённых источников, JPMorgan предоставил большую часть долгового финансирования по двум кредитам на общую сумму $9,6 млрд, включая кредит в размере $7,1 млрд, объявленный на этой неделе. Crusoe и Blue Owl по отдельности инвестировали в проект около $5 млрд.

После завершения строительства ЦОД в Абилине будет соперничать по масштабам с ЦОД xAI Colossus, который вместит до 1 млн ускорителей NVIDIA. Большей частью в ЦОД используются более ранние и менее мощные версии ускорителей NVIDIA — H100 и H200. На этой неделе Маск заявил, что следующим этапом Colossus станет «первый гигаватный суперкластер для обучения ИИ». В свою очередь, Amazon строит в Северной Вирджинии дата-центр мощностью более 1 ГВт, а Meta✴ возводит 1,5-ГВт кампус в Луизиане.

Источник изображения: Crusoe Energy

Возведение ЦОД в Абилине станет важным шагом в реализации планов OpenAI по снижению зависимости от Microsoft. Ранее стартап полагался исключительно на вычислительные мощности софтверного гиганта, а большая часть почти $14 млрд инвестиций Microsoft в OpenAI была предоставлена в виде кредитов на облачные вычисления. OpenAI и Microsoft расторгли соглашение об эксклюзивности услуг и прав Microsoft после того, как выяснилось, что аппетиты стартапа на вычисления намного превышают возможности Microsoft. Сейчас партнёры ведут переговоры по поводу того, как долго Microsoft будет сохранять лицензионные права на модели OpenAI.

OpenAI намерена расширить проект Stargate за пределы США, планируя построить крупный ЦОД в ОАЭ. Так, крупнейший ИИ ЦОД Stargate будет не в США — OpenAI и G42 планируют построить кампус ИИ ЦОД мощностью 5 ГВт в ОАЭ. Ранее сообщалось, что OpenAI обдумывает возможность инвестиций в строительство ИИ-инфраструктуры в Великобритании и Евросоюзе. Возможно, следующий кампус Stargate при поддержке SoftBank появится в Японии. Сейчас компания ищет новые площадки и партнёров в Азиатско-Тихоокеанском регионе.

OpenAI выделила более $11,6 млрд дополнительных средств на строительство объекта OpenAI в техасском Абилине (Abilene), сообщает Inside HPC. Первый кампус Stargate будет включать восемь объектов вместо в двух в первоначальном варианте проекта. Каждое из восьми зданий получит до 50 тыс. ускорителей в составе платформ NVIDIA Blackwell GB200 NVL72. JPMorgan Chase инвестирует в проект более $7 млрд.

Строительством совместно занимаются Crusoe Energy, Blue Owl Capital и Primary Digital Infrastructure. У компаний уже есть $11,6 млрд заёмных средств и акционерного капитала. Реализация первого этапа проекта началась в июне 2024 года, первые два 200-МВт объекта должны получить энергию в I половине 2025 года. Строительство в рамках второго этапа, которое началось в марте этого года, предусматривает создание ещё шести объектов и подведение 1 ГВт. Первые объекты второго этапа получит энергию в середине 2026-го, общая мощность кампуса в итоге составит 1,2 ГВт.

Дата-центр, который по словам Сэма Альтмана (Sam Altman) будет крупнейшей в мире площадкой для обучения ИИ-моделей, должен заработать в следующем году, общие инвестиции в проект составят $15 млрд. Stargate поможет OpenAI снизить зависимость от Microsoft — последняя вложила порядка $13 млрд в компанию с 2019 года. Сама NVIDIA, по слухам, вложила в OpenAI $100 млн в прошлом году.

Источник изображения: Crusoe Energy

Пока что в OpenAI разочарованы неспособностью Microsoft выделить достаточно ИИ-мощностей. В результате стартап заключил соглашение с Oracle об использовании площадки в Абилине после получения одобрения Редмонда. По имеющимся данным Oracle арендовала ЦОД на 15 лет. Сам кампус является частью Lancium Clean Campus принадлежащего Lancium. В долгосрочной перспективе OpenAI рассчитывает построить собственную сеть дата-центров, включая те, что предназначены для проекта Stargate стоимостью $100–$500 млрд.

Компания Crusoe получила кредитную линию в объёме $225 млн для расширения своего облака. Раунд возглавила частная кредитная структура Upper90 Capital Management, а участвовали в сборе средств British Columbia Investment Management Corporation, FS Investments, King Street Capital Management, Liberty Mutual Investments и ORIX USA, сообщает Datacenter Dynamics.

Более всего Crusoe сегодня известна строительством дата-центров, также компания управляет облачным сервисом, доступным корпоративным клиентам, желающим арендовать ИИ-инфраструктуру. Привлечённые средства потратят на приобретение ИИ-ускорителей NVIDIA и вспомогательной инфраструктуры для расширения облаков оператора.

В компании заявляют, что новые средства будут способствовать расширению облака Crusoe Cloud, призванного упростить и ускорить разработку ИИ для каждой компании-клиента. Давнее стратегическое партнёрство с Upper90 сыграло важную роль в масштабировании технологий Crusoe для удовлетворения спроса на облака. По данным пресс-службы Crusoe, последний раунд финансирования развивает успехи компании, достигнутые после декабрьского раунда серии D на сумму $600 млн.

Источники изображения: Alexander Grey/unsplash.com

В своё время компания начинала как бизнес, занимавшийся добычей криптовалют и размещала модульные ЦОД неподалёку от нефтегазовой инфраструктуры для использования в качестве топлива для генераторов попутного природного газа.

В последние годы она переключилась на работу с ИИ-инфраструктурой и строит большой ЦОД в Техасе совместно с Oracle для OpenAI, намеренной реализовать проект Stargate. Также сообщалось о совместном проекте с Chirisa и PowerHouse стоимостью $5 млрд, предусматривающем строительство ЦОД на этой территории США, в основном для CoreWeave. Наконец, совсем недавно она объявила о полном отказе от своего криптомайнингового бизнеса — оставшиеся активы проданы NYDIG.

Ранее сообщалось, что Crusoe получит доступ к 4,5 ГВт электричества, вырабатываться которое будет за счёт природного газа. Проект реализован совместно с инвесторами из Engine No.1. Предполагается использовать мощности для питания новых ИИ ЦОД, некоторые из которых, возможно, построят для Stargate.

Для Crusoe Cloud арендовано помещение ЦОД ICE02 в Исландии, партнёрское соглашение заключили и с Digital Realty. Стоит отметить, что Upper90 была одним из первых спонсоров Crusoe, кредит на оборудование компания предоставила последней ещё в 2019 году. В Upper90 подчеркнули, что Crusoe сегодня находится на переднем крае облачных ИИ-вычислений и решений в области экоустойчивой энергетики. Представители инвестора заявили, что заняты структурированием инновационного финансирования и гордятся углублением связей с Crusoe.

Оператор облачных проектов и ИИ ЦОД Crusoe Energy продал связанный с майнингом криптовалют бизнес, окончательно отказавшись от криптопроектов. Ранее сообщалось о намерении NYDIG приобрести бизнеса Crusoe, относящийся к добыче биткоинов, включая энергетичесие проекты Digital Flare Mitigation, однако условия сделки пока официально не разглашаются, сообщает Datacenter Dynamics. К NYDIG перейдут майнинговые ЦОД, генерирующие мощности (270 МВт) и около 135 сотрудников Crusoe.

Основанная в 2018 году, Crusoe изначально размещала криптомайнинговые мощности при нефтегазовых проектах, используя природный попутный газ для питания модульных ЦОД. В компании заявляли, что такой способ использования попутного газа значительно лучше для окружающей среды, чем просто сжигание. Crusoe внедрила более 425 модульных ЦОД общей ёмкостью более 250 МВт в семи штатах США (Колорадо, Северная Дакота, Монтана, Вайоминг, Нью-Мексико, Юта и Техас), а также в Аргентине. Поработав с майнинговыми проектами, Crusoe запустила собственный облачный ИИ-сервис, заняв место в нескольких колокейшн-ЦОД — прежде, чем перейти на использование собственных стационарных объектов.

Источник изображения: Crusoe

Основанная в 2017 году и аффилированная с управляющей активами компанией Stone Ridge Holdings Group, NYDIG уже имеет собственный бизнес по майнингу биткоинов и предлагает связанные с криптовалютой финансовые сервисы. Stone Ridge Energy владеет и управляет в США добычей природного газа, эквивалентной более чем 10 ГВт. В NYDIG заявили, что Crusoe создала «экстраординарное» предприятие по майнингу биткоинов, продемонстрировав выдающиеся инновации, собрав лучшие кадры индустрии для решения сложных задач и использования нетронутых энергоресурсов.

В настоящее время Crusoe строит крупный кампус дата-центров в Техасе совместно с Oracle для ИИ-проекта OpenAI Stargate. Для своих облачных проектов компания использует дата-центр ICE02 компании atNorth в Исландии. Также компания работает с Digital Realty, а на днях появилась новость о том, что она получит 4,5 ГВт от газовых электростанций для питания ИИ ЦОД.

Как сообщается в пресс-релизе Crusoe, она продолжит расти и масштабировать свою вертикально-интегрированную ИИ-инфраструктуру, включающую оптимизированные для ИИ дата-центры, расширит ассортимент предложений в облаке Crusoe Cloud и продолжит внедрение наиболее передовых в индустрии энергетических решений для обеспечения электричеством своей инфраструктуры.

Компания Crusoe Energy начала вторую фазу строительства кампуса ИИ ЦОД в технопарке Lancium Clean Campus в Абилине (Abilene, Техас), который будет обслуживать ИИ-мегапроект Stargate. Предполагается, что она будет завершена в середине 2026 года, когда будут построены шесть новых зданий. Всего кампус будет включать восемь объектов. Итоговая площадь кампуса составит более 370 тыс. м², а общая ёмкость вырастет до 1,2 ГВт.

Первая фаза строительства ИИ ЦОД в Абилине стартовала в июне 2024 года. Она включает возведение двух зданий площадью более 90 тыс. м² и ёмкостью более 200 МВт. Ожидается, что подача энергии начнётся в I половине 2025 года. OpenAI ранее заявляла о намерении управлять восемью зданиями в кампусе в Абилине. Crusoe отказалась комментировать, ведётся ли вторая фаза строительства в интересах Stargate. На этой неделе Crusoe анонсировала создание совместного предприятия на 4,5 ГВт не только для строительства ЦОД, но и для их автономного питания от газовых электростанций.

Источник изображения: Crusoe

Как заявляют в Crusoe, экспансия в Абилине знаменует важную веху для ИИ-индустрии. Масштаб сконцентрированных на одной площадке вычислительных мощностей весьма примечателен — она, по оценкам, сможет разместить до 400 тыс. ускорителей. На рынке ИИ-инфраструктуры появилась новая категория — «ИИ-фабрика», позволяющая обрабатывать ИИ-нагрузки с беспрецедентными скоростью и масштабом. В Crusoe гордятся тем, что предоставляют инфраструктуру, которая будет способствовать развитию человечества. В Lancium добавляют, что управление ЦОД такого масштаба требует инноваций на уровне кампуса для обеспечения надёжности электросетей при любых нагрузках.

Компания Crusoe Energy получит 4,5 ГВт от газовых электростанций для питания ИИ ЦОД. Строитель дата-центров создал совместное предприятие с американским хедж-фондом Engine No. 1, сообщает пресс-служба Crusoe. Ранее Engine No. 1 заключила с американским нефтегазовым гигантом Chevron соглашение о постройке электростанций, работающих на природном газе и использующих турбины GE Vernova. Электростанции будут питать дата-центры напрямую, без подключения к общей энергосети. Энергия, вероятно, будет доступна уже к 2027 году.

Первый объект Stargate возводится на площадке Crusoe в техасском Абилине (Abilene). Он будет запитан от газовых турбин мощностью 360 МВт от всё той же GE Vernova. Дополнительно кампус получит солнечную электростанцию и энергохранилище. Пока нет точных данных, сколько из 4,5 ГВт достанется исключительно Stargate. Crusoe заявила, что пока ведёт переговоры с несколькими гиперскейлерами. Огромная мощность, которую получит Crusoe, делает компанию весьма привлекательным партнёром для гиперскейлеров, желающих быстро нарастить ёмкость ЦОД. Для сравнения: год назад ёмкость всех дата-центров Microsoft была на уровне 5 ГВт.

Источник изображения: American Public Power Association/unsplash.com

Природный газ многими рассматривается как более экобезопасная альтернатива другим видам ископаемого топлива. Впрочем, такая энергия всё равно не столь «чиста», как получаемая из возобновляемых источников. Как сообщают в Engine No. 1, стратегическое партнёрство использует сильные стороны Crusoe в строительстве дата-центров, а фонд займётся обеспечением поставок энергии. Как это соотносится с планами Chevron строить собственные ЦОД и снабжать их энергией от семи генераторов GE Vernova, пока неизвестно.

Девелопер ИИ ЦОД Crusoe Energy, ответственный за строительство первых дата-центров ИИ-мегапроекта Stragate, заключил многолетнее рамочное соглашение с канадским поставщиком энергии Kalina Distributed Power (KDP) о строительство в Альберте многочисленных колокейшн-ЦОД с питанием от электростанций на природном газе, сообщает Datacenter Dynamics. KDP принадлежит Kalina Power Limited, работающей в Австралии, Китае, Канаде и США.

Crusoe будет строить, владеть и управлять дата-центрами, приобретая для них электроэнергию у принадлежащих KDP электростанций суммарной мощностью 170 МВт. Также предусмотрен захват выделяемого станциями CO₂. Фактически речь идёт о соглашениях о покупке энергии (PPA) минимальным сроком на 15 лет. Правда, детали о масштабах и времени строительства ЦОД пока не раскрываются. Кроме того, KDP не сообщила, когда заработают новые газовые электростанции.

Как сообщается в пресс-релизе Kalina, каждый потенциальный колокейшн-проект предусматривает заключение отдельного «Соглашения о разработке» (Project Development Agreement, PDA). Каждое PDA предусматривает подписание долговременного PPA, а также оговаривает ответственность Crusoe за платежи, обеспечивающие надёжность подключения к энергосетям каждого проекта. Упомянуты три площадки KDP: Myers Energy Park на 26 га, Alsike Energy Park на 65 га и Crossfield Energy Park на 130 га. KDP ведёт переговоры о покупке ещё 117 га в Myers Energy Center, что позволит построить намного более крупный дата-центр.

Источник изображения: Guillaume Jaillet / Unsplash

Выбранные площадки имеют доступ к критически важной инфраструктуре, включая ЛЭП, газопроводы и ВОЛС. Кроме того, все три используют технологии захвата и сохранения углеродных выбросов. Экологические исследования уже ведутся на площадках Myers и Alsike, а в локации Crossfield должны завершиться в 2025 году. KDP также подала запросы на самообеспечение энергией и возможность её экспорта к Alberta Electric System Operator для всех трёх объектов. Также изучается потенциал других площадок, включая Gilby Power Park и новой локации в Клермонте.

Альберта, на которую приходится более половины добываемого в Канаде газа, становится всё привлекательнее для ИИ ЦОД, желающих подключиться к относительно доступной энергии газовых электростанций. Впрочем, власти провинции не совсем рады такому интересу со стороны операторов ЦОД. Они приняли закон, согласно которому дата-центры должны самостоятельно обеспечивать себя энергией и генерирующими мощностями. В результате операторы ориентируются на соглашения с местными газовыми компаниями для организации энергопоставок.

Официальные документы пролили свет на некоторые аспекты строительства кампуса Stargate в Техасе. Первая очередь ЦОД, как ожидается, будет завершена к концу 2025 года и обойдётся в $1,1 млрд, сообщает Business Insider.

Пока о Stargate известно не очень много. Поданные техасским властям документы свидетельствуют о том, что стройка зарегистрирована под названием Project Ludicrous и расположена по адресу, соответствующему местоположению Lancium Clean Campus — участка площадью 505 га в Абилине (Abilene), принадлежащей компании Lancium. Недавно появилась информация, что кампус будет питаться от газовых и ветряных турбин, а также солнечной электростанции.

Владельцем Project Ludicrous названа Abilene DC 1 — дочерняя структура Crusoe Energy, которая в конце 2024 года привлекла $600 млн на строительство в Техасе. Согласно общедоступным официальным документам, арендатором ЦОД, принадлежащего Abilene DC 1 и расположенного в Lancium Clean Campus, является Oracle. Контактным лицом арендатора Project Ludicrous в документах также указан сотрудник Oracle. С июля по декабрь 2024 года представители Project Ludicrous подали техасскому регулятору четыре заявления, касающиеся строительства двух объектов.

Источник изображения: Lancium

Строительство первого, одноэтажного объекта площадью 45 тыс. м² оценивается в $292 млн. Оно началось в июне прошлого года и должно завершиться к лету 2025-го. В документах также фигурируют планы создания помещения для охраны, здания для пожарных насосов, механических и электрических корпусов. Во втором заявлении, поданном в сентябре 2024 года, речь идёт об оснащении стоимостью $140 млн — работы начались в декабре и, вероятно, будут завершены к 15 сентября текущего года. Второй объект полностью аналогичен первому. Его строительство началось осенью прошлого года и завершится в сентябре 2025-го. Оснащение объекта начнётся в марте 2025 года и завершится к 24 декабря, оно оцениваются в $384 млн.

Lancium заключила соглашение о застройке с властями Абилина в 2021 году. Изначально кампус Lancium Clean был рассчитан на «зелёные» майнинговые ЦОД, но этот проект так и не был реализован. В ноябре 2024 года Crusoe Energy объявила о планах создания 205-МВт ИИ ЦОД за $3,4 млрд на территории данного кампуса, который уже был сдан в аренду неназванному гиперскейлеру «из списка Fortune 100». Ожидалось, что «заселение» начнётся в первой половине 2025 года. О том, что арендатором станет Oracle, которая сдаст мощности OpenAI, сообщалось и ранее.

Для бесперебойного снабжения электроэнергией американского суперпроекта Stargate, помимо подключения к энергосети, будут использоваться солнечная энергия, природный газ, аккумуляторные энергохранилища и дизель-генераторы, сообщает Datacenter Dynamics. Строительство первого ЦОД уже начато в Техасе.

По данным источников Bloomberg, знакомых с планами развития Stargate, часть энергии, вероятно, будет поступать от SB Energy, дочерней структуры компании SoftBank, предлагающей солнечные и аккумуляторные решения. SB Energy уже довольно давно планировала запитать ЦОД в Техасе. В прошлом году компания объявила о трёх соответствующих проектах для дата-центров Google. Речь идёт о «солнечном поясе» Orion Solar Belt — солнечных электростанциях Orion I, Orion II и Orion III суммарной мощностью почти 900 МВт (258 МВТ, 302 МВт и 315 МВт соответственно).

OpenAI сообщила журналистам, что рассматриваются различные варианты модернизации энергосистемы Соединённых Штатов с использованием самых разных технологий — от атомной энергетики до аккумуляторных энергохранилищ. Поскольку одной только солнечной энергии для Stargate вряд ли хватит, OpenAI будет использовать и другие источники. Подрядчики Stargate уже подали заявку на строительство электростанции на природном газе мощностью 360,5 МВт и стоимостью около $500 млн. Всего будет задействовано десять газовых турбин — по пять от GE Vernova и Solar Turbines («дочка» Caterpillar). Они напрямую будут питать дата-центр.

Заявку подала компания, работающая в интересах Crusoe Energy, которая, в свою очередь, ещё летом начала строительство 205-МВт ИИ ЦОД для Oracle и OpenAI в техасском Абилине (Abilene), также известного как Project Ludicrous. Именно этот кампус, как ожидается, станет первой действующей площадкой Stargate. Кроме того, уже получено разрешение на установку резервных дизель-генераторов.

Источник изображения: Thomas Richter/unsplash.com

Дополнительно появилась информация о том, что OpenAI ищет для Stargate менеджера по закупкам, ответственного за оборудованиее и работу с поставщиками, и технического руководителя программ, отвечающий за инфраструктурную стратегию. Обе вакансии предполагают широкий круг обязанностей, от соискателей требуется не менее пяти лет опыта работы в крупных проектах. Не так давно OpenAI уже переманила из Meta✴ специалиста по цепочкам поставок для помощи в реализации проекта Stargate.

Стартап Crusoe Energy Systems LLC, занимающийся строительством ИИ ЦОД, объявил об успешном привлечении $600 млн. Эти средства направят на ускоренное расширение физической инфраструктуры компании, сообщает The Information. Раунд финансирования серии D обеспечил рост стоимости компании до $2,8 млрд. Его возглавил фонд Founders Fund Питера Тиля (Peter Thiel), участие приняли NVIDIA, Fidelity, Long Journey Ventures, Mubadala, Ribbit Capital и Valor Equity Partners.

Основанная в 2018 году Crusoe изначально занималась строительством контейнерных ЦОД для нефтяных полей — такие объекты работают на попутном «факельном» газе. Компания использовала энергию для майнинга биткоинов, но позже переориентировалась на ИИ-проекты и HPC-решения в целом, а сейчас переключилась на строительство крупных дата-центров. Кроме того, был анонсироване сервис Crusoe Cloud. В компании заявляют, что могут обеспечить экономически эффективные масштабные ИИ-вычисления, предоставляя экологически безопасную инфраструктуру.

Источник изображения: Ruthson Zimmerman/unsplash.com

В октябре 2024 года Crusoe сформировала совместное предприятие с Blue Owl Capital и Primary Digital стоимостью $3,4 млрд для строительства кампуса ЦОД из двух зданий в Техасе. Кампус обеспечат около 93 тыс. м³ площадей и получит около 1,2 ГВт энергии. Объект будет вмещать до 100 тыс. современных ускорителей и станет одним из крупнейших в мире дата-центров, построенных специально для ИИ-нагрузок. По-видимому, вычислительные мощности именно этого кампуса при посредничестве Oracle и Microsoft достанутся OpenAI.

В прошлом году компания объявила о расширении сотрудничества с ведущими технологическими компаниями, включая NVIDIA, Vast Data Inc., Deloitte и Rescale Inc. Теперь Crusoe действует в девяти штатах США и трёх странах, включая Исландию. Новые инвестиции, по данным компании, позволят ей построить больше ЦОД, в изобилии обеспеченных чистой энергией. Уже сейчас ведётся реализация проектов дата-центров общей ёмкостью более 15 ГВт.